﻿Managementul calitatii in laboratoarele de analize medicale Maria Enea ,Irina Luciana Dumitruiu Bogdan Gurzu,Didona Anca Ungureanu Simona Mihaela Slatineanu In laboratorul dumneavoastra utilizati reguli de control? Utilizati regula 1:2s? Aplicati aceleasi reguli pentru toti analitii? Limitele de control sunt stabilite dupa datele din inserturi? In situatii de “out of control” -repetati controlul? -masurati alt asantion de control? -recalibrati? 70% din informatiile utilizate pentru deciziile medicale vin din testele de laborator! Rezultatele masuratorilor sunt doar niste estimari! Un rezultat de laborator este cea mai buna estimare a valorii unui analit Responsabilitatea oricarui laborator consta in furnizarea de rezultate credibile, reproductibile si relevante REFERINTE 1.SR EN ISO 15189:2013, Laboratoare medicale- Cerinţe pentru calitate şi competenţă 2.ISO/TS 22367, Laboratoare medicale - Reducerea erorilor prin managementul riscului şi îmbunătăţire continuă. Prima ediţie 2008-05-01 3.CLSI C24-A3: Statistical Quality Control for Quantitative Measurement Procedures: Principles and Definitions —Third Edition; Approved Guideline. CLSI: Wayne, PA: 2006 4. Good Laboratory Practices (GLPs) for Statistical Quality Control Part II: QC Limits and Limitations, James O. Westgard, PhD 5.Six Sigma Quality Design and Control, James O Westgard, PhD, Second edition DEFINITII Acuratetea/inacuratetea de masurare, gradul de concordanţă între rezultatul unei măsurări şi valoarea reală a măsurandului,]Se exprima prin Bias Trueness (increderea) de masurare, gradul de apropiere intre media ce ar putea fi obtinuta dintr-un nr. infinit de valori cantitative obtinute in conditii specificate si valoarea adevarata a masurandului. Precizia/imprecizia de masurare, gradul de apropiere intre rezultatele unor măsurători repetate ale unui analit in conditii specificate. Este o măsură a dispersiei valorilor mărimii măsurate. Se exprima prin medie, DS si CV Conform ISO 5725-1, acuratetea de masurare se defineste prin cei 2 termeni: trueness si precision. ISO 5725-1, Accuracy (trueness and precision) of measurement methods and results Eroare de masurare = diferenta dintre rezultatul unei masuratori si valoarea adevarata a masurandului Erori intamplatoare, afecteaza precizia testului Cauze: - variatii de tensiune - pipete - contaminarea probelor - bule de aer la pipetare etc Identificare : 1:3s or R:4s Erori sistematice, afecteaza acuratetea testului Cauze: - calibrare - lot nou de reactivi - temperatura de reactie - deteriorarea sursei de lumina etc. Identificare: 2:2s, 4:1s, or 10x Eroarea totala admisa, TEa este o cerinta de calitate ce stabileste limitele admise( tolerate )de imprecizie si inacuratete in cazul unei singure masuratori sau a unui singur rezultat al unui test TEa semnifica o magnitudine a erorii de masurare care daca ar fi depasita ar cauza rezultate inacceptabile si care pe langa erorile aleatorii si erorile sistematice cuprinde si variabilele preanalitice si variatia biologica intraindividuala Serie analitica (run analitic), un interval de timp in care acuratetea si precizia de masurare a unui sistem de masurare sunt stabile. Nu mai mult de 24 de ore! N, numarul de masuratori de control dintr-o serie analitica - pot fi mai multe masuratori pe un singur nivel de control sau - masuratori individuale pe doua sau mai multe materiale de control. Asigurarea calitatii, ansamblul masurilor luate pentru a asigura corectitudinea investigatiilor de laborator incat rezultatele finale sa reflecte cat mai corect starea prelevatului investigat, din etapa preanalitica, analitica si postanalitica Controlul intern de calitate este un set de proceduri efectuate de catre personalul laboratorului pentru controlul permanent al operatiunilor si rezultatelor de masurare pentru a decide daca rezultatele sunt suficient de fiabile pentru a fi eliberate SR EN ISO 15189:2013, cap.14.6;4.14.7, Managementul riscului “Laboratorul trebuie să stabilească indicatorii calităţii pentru a monitoriza şi evalua performanţa pe tot parcursul aspectelor critice ale proceselor de pre- examinare, examinare şi post- examinare” Responsabilitatea fiecarui laborator consta in eliminarea erorilor susceptibile de a se produce in timpul proceselor de pre- si postexaminare. Strategia controlului intern de calitate implica: 1. planificarea controlului: - alegerea materialelor de control - numarul si matricea acestora - plasarea lor in cadrul seriei analitice 2. analiza statistica a rezultatelor - trasarea / generarea automata a diagramelor Levey Jennings - stabilirea limitelor si regulilor de control Westgard - interpretarea rezultatelor in functie de regulile stabilite Care este rolul controlului intern de calitate? 1.Sa detecteze imediat orice eroare de masurare (prin Ped si Pfr ) si sa alerteze specialistul in cazul in care apar probleme ce pot afecta utilitatea medicala a rezultatelor 2. Sa ofere o imagine clara a monitorizarii in timp a tuturor factorilor de eroare ce ar afecta performanta de masurare a metodei ( precizia si acuratetea de masurare) Istoric Walter Shewhart,intemeietorul statisticii din controlul de calitate - in mai 1924,pe o harta de control de calitate descrie imbunatatirea calitatii prin reducerea variabilitatii S. Levey si E.R. Jennings,1950, au sugerat utilizarea hartii de control Shewhart in laboratoarele medicale Istoric James O.Westgard 40 de ani de experienta la Universitatea Wisconsin - reguli Westgard - validarea metodei - six sigma,OPSpecs Sten Westgard > de 20 de ani de experienta de QC Westgard Ce sunt regulile Westgard? Sunt criterii de decizie, stabilite pe o harta de control, Levey Jennings, pentru acceptarea/respingerea rezultatelor din controlul intern de calitate si derularea sau NU a procesului de masurare a probelor biologice de pacient. Notarea regulilor Westgard In mod conventional s-au stabilit urmatoarele abrevieri pentru notarea regulilor Westgard: - 1:2s cand o masuratoare de control depaseste limitele 2s - combinatia de reguli Westgard este notata cu semnul "slash" (/) intre reguli. De exemplu: 1:3S / 2:2S / R:4S / 10x Regula 1:2S Respingem controlul intern cand o singura valoare masurata se situeaza inafara intervalului [medie ± 2s]. Regula 1:2s este regula care da nivelul cel mai mare de false rejectari si de alarme false! Regula 1:3s Controlul intern este rejectat (de neacceptat) cand o singura valoare masurata este mai mare decat medie ± 3s. Regula 2:2s Respingem controlul intern atunci cand 2 valori consecutive se situeaza inafara intervalului de 2s de aceiasi parte a mediei Regula 2 din 3:2s Respingem controlul intern atunci cand 2 din 3 masuratori se situeaza de aceiasi parte a mediei inafara intervalului [medie±2s]. Regula 3:1s Respingem controlul intern atunci cand 3 masuratori consecutive se situeaza de aceiasi parte a mediei inafara intervalului [medie±1s]. Regula R:4s Respingem controlul intern cand intervalul (Range) dintre 2 masuratori consecutive este mai mare de 4s. Regula 4:1s Respingem controlul intern cand atunci cand 4 masuratori consecutive, pe un material sau pe 2 materiale de control diferite se situeaza de aceiasi parte a mediei inafara intervalului [medie±1s]. Regula 10x Respingem controlul intern atunci cand 10 masuratori consecutive se situeaza de aceiasi parte a mediei( cinci masuratori pe cate un material de control in cazul folosirii a 2 seruri de control). Regula 12x Respingem controlul intern atunci cand 12 masuratori, cate 4 pe fiecare din cele 3 materiale de control se situeaza de aceiasi parte a mediei. Regula 7T Respingem controlul intern atunci cand 7 masuratori consecutive au tendinta crescatoare sau descrescatoare in aceiasi directie. Calitatea controlului intern de calitate se exprima prin: Pfr si Ped Ped, probabilitatea de detectare a erorilor, este o caracteristica de performanta care descrie cat de des se exclude o serie analitica cand rezultatele din controlul intern arata erori ce includ si imprecizia inerenta a metodei Teoretic 100%, acceptabil 90% Pfr, probabilitatea de rejectare falsa, este o caracteristica de performanta care arata cat de des se rejecteaza( se exclude) o serie analitica atunci cand nu apar erori de masurare, cu exceptia impreciziei inerente a metodei de masurare Teoretic 0%, acceptabil 5% Ped si Pfr au efecte contrarii in functie de stabilirea limitelor de control: Creşterea limitelor de control ^ jPfr (recomandat) jPed (nerecomandat) Scaderea limitelor de control ^ ÎPfr (nerecomandat) TPed (recomandat) Care este solutia ? Folosirea regulilor multiple! Pentru N = 2, se recomanda : 1:3s/ 2:2s/ R:4s/ 4:1s/ 10x Pentru N = 3, se recomanda 1:3s/ 2 din 3:2s/ R:4s/ 3:1s/ 12x Avantajele Regulilor multiple -Multirules-reduc falsele rejectari si respingem controlul intern numai daca una dintre regulile stabilite este incalcata -Ne permit sa analizam si masuratori din zilele precedente si putem identifica timpuriu erorile sistematice care pot sa apara -Scad costurile consumabilelor, scade timpul si efortul de analiza a datelor, creste eficienta si calitatea rezultatelor Cand utilizam regulile multirules? - Nu intotdeauna! - Nu aceleasi reguli pentru toti analitii! Se pot utiliza diferite combinatii de reguli multiple In functie de performantele obtinute Exemplu: 1:3s / 2din3: 2s4:1s / R:4s / 10x Se elimina regula 1:2s, ce conduce la o rata mare de rejectare falsa Regula 1:2s se foloseste numai in cazul metodelor manuale si in cazul utilizarii unui singur material de control Laboratoarele isi pot stabili singure combinatia de reguli Westgard in functie de parametrii de performanta urmariti, - doua reguli pentru erorile aleatorii si - minim doua reguli pentru erorile sistematice. Reguli obligatorii - 1: 3s/ R: 4s/ 10x, pentru N=2 - 1: 3s/ R: 4s/ 12x, pentru N=3 Usor de zis, greu de facut! Dificultatea utilizarii Westgard multirules consta in faptul ca limitele de control stabilite nu sunt adecvate. O practica comuna in tara noastra consta in utilizarea valorilor din insert pentru stabilirea limitelor de control. Aceasta practica conduce la niste limite prea largi pentru ca valorile reflecta variatia observata in laboratoarele utilizate de producatorul materialelor de control. Conform CLSI document C24-A3, Good Laboratory Practices (GLPs) for Statistical Quality Control Limitele de control trebuie sa fie stabilite fata de media valorilor masurate si deviatia standard a mediei astfel incat sa reflecte comportamentul procedurii de masurare din propriul laborator !!! NCCLS - National Committee for Clinical Laboratory Standards a devenit de la 1 ianuarie 2005 CLSI - Clinical and Laboratory Standards Institute NCCLS recomanda utilizarea mediei de valori cumulative din 100 de masuratori sau mai mult (datele din controlul intern de pana la 6 luni) pentru a reduce variabilitatea si a estima deviatia standard a metodei. The NCCLS recunoaste ca valorile atribuite sunt necesare cand incepem un nou material de control , dar recomanda ca laboratorul sa-si stabileasca (“switch over”) cat de repede posibil ( dupa 20 de masuratori) limitele dupa media cumulativa, DS,CV,ideal dupa 100 masuratori sau mai multe (pana la 6 luni) pentru a minimaliza variabilitatea metodei. Valorile materialelor de control furnizate de producator trebuie sa fie utilizate numai ca un ghid pentru setarea limitelor initiale de control sau pentru materiale de control noi . Media laboratorului trebuie sa se situeze in intervalul stabilit de producator pe materialul analizat CLSI C24-A3 recomanda stabilirea limitelor de control prin tehnica Cusum pe baza mediei si deviatiei standard calculate din 100 de masuratori. Pentru ca acest lucru dureaza prea mult, laboratoarele ar trebui sa stabileasca limitele initiale pe baza a cel putin 20 de masuratori, apoi dupa colectarea altor 20 pana la 100 sa recalculeze valorile cumulative ale mediei si deviatiei standard. Suma cumulativa (cusum) se refera la o tehnica de control in care se calculeaza media dintre valorile de control obtinute, apoi aceasta medie constituie un indicator mult mai sensibil la schimbarile sistematice. Obtinem o DS mult mai reprezentativa daca luam in calcul valorile cumulative din controlul intern de calitate din 6 luni. Aceasta DS ne ofera o imagine mult mai robusta a efectelor factorilor surveniti de-a lungul celor 6 luni, cum ar fi: recalibrarile, schimbarea lotului de reactivi, lotul calibratorilor, conditiile de mediu, mentenanta echipamentului, personalul. Cum procedam in cazul unui nou lot de material de control? Daca noul lot de control are valoare tinta similara lotului anterior folosit utilizam limitele de control anterior stabilite din perioada de 6 luni, dar deviatia standard ar trebui reevaluata periodic Cum procedam in situatii de “out of control”? -Niciodata nu repetam automat controlul!!! -Eliminam rezultatele“out of control”din orice calcul statistic: medie, DS,CV -Pastram toate rezultatele“out of control in baza de date a IQC,ca semnal de alarma, pentru a monitoriza corect performantele metodei utilizate. Concluzii -Fiecare laboratorul este responsabil pentru alegerea procedurii de control pentru fiecare test, care sa monitorizeze acuratetea si precizia unui process analitic, dar pentru rezultate reproductibile, conditiile trebuie sa fie reproductibile! -Laboratorul trebuie sa-si stabileasca numarul, tipul, frecventa materialelor de control utilizate si pozitia lor in cadrul seriei analitice Concluzii -Procedurile de control trebuie sa detecteze imediat erorile ce apar datorita caderii sistemului de masurare, conditiilor de mediu si/sau performantelor operatorului(acuratetea si precizia de masurare) - Procedura de control alerteaza prompt cu privire la erorile survenite dar laboratorul monitorizeaza in timp modul cum acestea pot influenta acuratetea si precizia proprie. Concluzii -Utilizam regula 1:2s drept criteriu de acceptabilitate/ respingere in cazul metodelor manuale (unde survin multe surse de eroare) si atunci cand avem un singur material de control. - In celelalte situatii aceasta regula este utilizata drept semnal de alarma pentru aplicarea regulilor multiple. Reguli obligatorii: 1:3s/R:4s/10x(12x) -Nu stabilim aceleasi reguli de control pentru toti analitii Concluzii -Stabilim limitele de control dupa propria medie si deviatie standard. -Valoarea tinta si deviatia standard a materialelor de control din inserturi (puse la dispozitie de producator) sunt utilizate ca un ghid doar la inceputul unui lot nou de control SIX SIGMA Ce este Six Sigma ? Six Sigma inseamna o multime de lucruri! Six = sase Sigma = σ, litera greceasca care desemneaza variabilitatea intr-un proces de masurare, adica este deviatia standard notata cu s Definitii Six Sigma este:. - o metrica - o metodologie - un sistem de management …si de fapt,toate la un loc Definitii Six Sigma, ca metrica, termenul de six sigma este utilizat ca o scala pentru nivelele de calitate. Folosind aceasta scala , six sigma insemana 3,4 defecte la un milion de oportunitati Six Sigma, metodologie Six sigma este o metodologie riguroasa care foloseste date si analiza statistica pentru a masura si a imbunatati calitatea serviciilor oferite, prin identificarea si prevenirea aparitiei defectelor Obiectivul Six sigma este obtinerea unei performante inalte de 99,999%. Este un concept de imbunatatirea calitatii prin reducerea numarului de defecte, prin reducerea variabilitatii. Definitii Six Sigma, Sistem de management . Six sigma este cel mai complet sistem de management care urmareste sa imbunatateasca calitatea serviciilor prin eliminarea defectelor Six sigma este un termen statistic care masoara cat de mult un proces se indeparteaza de perfectiune! Definitii Six Sigma …si de fapt,toate la un loc Ideea centrala a conceptului six sigma este ca daca: - poti masura cate defecte ai intr-un proces - poti sa stabilesti cum sa le elimini si - poti sa ajungi cat se poate de aproape de zero defecte . Istoric -Conceptul Six sigma a fost folosit prima data in 1980 de catre firma Motorola, pentru imbunatatirea calitatii componentelor electronice - In 1995, compania General Electric a decis implementarea Six Sigma - Astazi este o metodologie atotcuprinzatoare, folosita in intreaga lume, in organizatii destul de diverse: aeronautica, departamente guvernamentale, spitale, forte armate, etcbanci, etc. Six sigma in laboratoarele medicale -in 2000 a fost publicat primul articol despre Six sigma in fazele preanalitice si postanalitice - In 2001, apare prima editie a cartii Six Sigma Quality Design & Control, autor James O Westgard, Ph,D. Principiile sistemului de management 6  (DMAIC) Defineste Masoara Analizeaza Imbunatateste Controleaza Cum aplicam 6 sigma in laboratorul medical? In laboratoarele medicale se poate utiliza conceptul Six Sigma in doua moduri: - 1.prin DPMO, in fazele pre si postanalitica - 2.prin utilizarea de Sigma-metric Equation Method Decision Chart OPSpecs Chart, in faza analitica SR EN ISO 15189:3012, cap.5.5.2.1 . “… laboratorul trebuie sa conceapa proceduri de control al calitatii care sa verifice realizarea calitatii intentionate a rezultatelor”, adica sa cunoasca cat este eroarea totala admisa Tea, pentru fiecare metoda folosita. In procesele pre si postanalitice, se calculeaza DPMO ( defectele per million), dupa formula: DPMO= (nr.total de defecte gasite in probe/nr.de probe x nr. total de oportunitati) X 1.000.000 In procesul analitic: 1.Utilizarea Ecuatiei Sigma metric TEa(%)  Bias (%) Sigma  CV(%) De unde luam TEa ? Surse: -CLIA (Clinical Laboratory Improvement Amendments) -Rilibak (German Guidelines for Quality) - Biologic Variation Database “Ricos Goals” Bias 1.diferenta dintre rezultatul laboratorului si valoarea atribuita unui material de referinta certificat (nu calibratorul folosit, nu materialul de control folosit) 2. diferenta dintre rezultatul laboratorului si media de comparare din controlul extern Interpretare Sigma metric. 6 σ → ideal 5σ - 6σ → excelent 4σ - 5σ → bun 3σ - 4σ → la limita 2σ - 3σ →nesatisfacator < 2σ → inacceptabil Model de calcul Sigma metric 2. Folosirea Diagramei de decizie, care indica zonele de incadrare calitativa pentru o metoda analitica Cum trasam diagrama de decizie? Reprezentam pe un sistem de coordonate, astfel: -Pe axa Y, - inacuratetea, in Bias%, pana la eroarea totala admisa TEa% -Pe axa X- imprecizia, in CV%, pana la 0,50 din eroarea totala admisaTEa% - Se imparte planul dintre cele doua coordonate in 5 zone de incadrare calitativa: ideal, excelent, bun, la limita, slab si inacceptabil, astfel: -linia ce uneste punctul de TEa cu ½ din TEa, de pe axa X,( TEa =Bias +2DS) reprezinta 2sigma -linia ce uneste punctul de TEa cu 1/3 din TEa de pe axa X,(TEa =Bias +3DS) reprezinta 3sigma -linia ce uneste punctul de TEa cu 1/4 din TEa,de pe axa X, (TEa =Bias +4DS) reprezinta 4sigma -linia ce uneste punctul de TEa cu 1/5 din TEa,de pe axa X, (TEa =Bias +5DS) reprezinta 5sigma -linia ce uneste punctul de TEa cu 1/6 din TEa(de pe axa X, (TEa =Bias +6DS) reprezinta 6 sigma Analizam performanta metodei ( de la excelent la inacceptabil) daca identificam zona de calitate cu punctul ce reprezinta Bias-ul si CV obtinut. 3. Folosirea diagramei OPSpecs Chart Imbunatatim performanta prin alegerea metodei de control din tabelul din dreapta diagramei de decizie. Orice linie situata deasupra punctului identificat prin Bias% si CV% ne conduce la o procedura de control QC adecvata Diagrama Normalized OPSpecs Chart ne permite utilizarea hartii pentru orice cerinta de calitate (orice TEa), putem sa reprezentam pe harta toate metodele folosite, indiferent de TEa. Pe axa y a acestei harti sunt reprezentate procente din TEa pana la 100% iar pe axa x sunt procente din TEa pana la 50%. Cum trasam hartile OPSpecs chart”? Exista mai multe “generatii” de programe disponibile: -manual, pe baza cunostintelor teoretice -pe harti pretiparite din manualul OPSpecs(Westgard JO.OPSpecs Manual- Expanded Edition.Madison,WI:Westgard QC,Inc.,1996) -semiautomat, utilizand un calculator -automat, programul QC Validator James O. Westgard recomanda un ghid practic pentru selectarea procedurilor de control adecvate luand in considerare nr. de masuratori - N, nr. seriilor analitice - R si regulile de control adecvate Daca  ≥ 6 - utilizam 2 sau 3 masuratori ; limitele de control stabilite la 3s sau 3.5s (pentru a minimaliza falsele rejectari evitam limitele de control de 2s)  Daca  = 5 - utilizam 2 sau 3 masuratori- limitele de control stabilite la 2.5s sau 3s (de preferat utilizam - limita de 3s daca > 5 si limita de 2.5s daca < 5) Daca  = 4 - utilizam 4 sau 6 masuratori cu regulile multiple  Daca < 4, utilizam procedura de control care sa ne asigure maximum de performanta: 2 sau 3 materiale de control masurate in dublu, cel putin de 2 ori pe zi (grija la mentenanta echipamentului si analisti cu cea mai buna experienta) Avantajele Six Sigma -Mai usor pentru laborator -Mai ieftin pentru sistemul de sanatate -Mai bine pentru pacient! Si in laboratorul Dumneavoastra poate fi aplicat conceptul Six Sigma! -Se numara defectele si se convertesc in DPMO - in procesele pre- si postexaminare -In procesul de examinare,pentru analiza performantei se utilizeaza: - Ecuatia sigma metric si - Harta de decizie -Pentru optimizarea performantei se utilizeaza harta OPSpecs Chart Calcularea DPMO ( defecte pe milion de oportunitati) Exemple de Oportunitati : hemoliza, proba coagulata, incorect identificata, volum insufficient, volum prea mare, etc DPMO= (nr.total de defecte gasite in probe/nr.de probe x nr. total de oportunitati ce ar putea sa apara) X 1.000.000 